O Instituto de Inteligência Artificial de Pequim (BAAI) lançou o FlagPerf v1.0, um mecanismo de avaliação de hardware de IA de código aberto. O FlagPerf inclui métricas de avaliação de precisão funcional, desempenho, uso de recursos e compatibilidade do ecossistema. Ele suporta vários frameworks de treinamento e mecanismos de inferência, bem como vários ambientes de teste. O código de avaliação é rigorosamente revisado para garantir resultados justos e imparciais. O código de teste foi disponibilizado como código aberto, permitindo a reprodução dos processos e dados de teste.